牛乳の代わりに豆乳。何でも代用できるのでしょうか？

デザートカテで質問しましたが回答が得られずこちらでもう一度質問させていただきます。

最近お菓子作りに少しハマり気味です。
豆乳が好きなので出来るだけ牛乳より豆乳を使いたいのです。
本などで「豆乳を使ったデザート」とかありますよね。
クッキーとかゼリー(ババロア)など。
そこで思ったのが
「なんでも牛乳の代わりに豆乳を使ってもそれなりに出来るんじゃないか・・？」と。
ゼリーは勝手に豆乳に置き換えて作ったりしてみてるんですが他(ケーキやスポンジ系等)は出来るか不安で
指定がない限りチャレンジしていません。

これは豆乳では出来ないでしょう！という物ありますか？
‘相性の悪い材料’や‘豆乳を代品に使うときに注意点'などもあれば教えてください